Ansiedade em situações de prova: evidências de validade de duas escalas / Anxiety in examination contexts: validity evidence of two scales / Ansiedad en situaciones de prueba: evidencias de validez de dos escalas

A competição, a cobrança social e pessoal e a possibilidade de fracasso são alguns dos fatores que podem tornar a situação de prova um evento estressante e gerador de ansiedade. Nesse contexto, este estudo objetivou disponibilizar para o Brasil dois instrumentos de avaliação da ansiedade em situações de testagem e demonstrar evidências de validade dessas escalas. Participaram do estudo 1.878 estudantes do ensino médio de escolas públicas e particulares de Brasília. Dois instrumentos de ansiedade foram desenvolvidos: um que busca medir quatro dimensões de ansiedade, o Inventário de Ansiedade frente a Provas (IAP), e o Inventário de Ansiedade Internamente e Externamente Causada (IAIEC). Verificou-se que os instrumentos têm adequadas estruturas fatoriais e boa consistência interna. Ademais, análises de correlação com outros instrumentos de ansiedade indicaram evidências de validade convergente adequada com correlações entre 0,31 e 0,72. As implicações do estudo são notáveis no âmbito clínico, social e acadêmico...

Competition, social and personal demands, and the possibility of failure are all factors that might turn examination situations into stressful and anxiety-inducing events. The purpose of the present study was to provide two Brazilian assessment instruments of anxiety in examination contexts and to demonstrate evidence of their validity. A sample of 1,878 high school students from public and private schools in Brasilia participated in this study. Two instruments of anxiety were developed: the Testing Anxiety Inventory (IAP) measuring four anxiety dimensions, and the IAIEC assessing internally and externally caused anxiety. The findings indicate that both instruments have an adequate factor structure and a good internal consistency. Moreover, correlational analysis with other instruments of anxiety suggests evidence of an adequate convergent validity with correlations varying between .31 and .72. The implications of the present study are noteworthy in clinical, social and academic contexts...

La competencia, presión social y personal, así como la posibilidad de fracaso son algunos de los factores que pueden hacer de la realización de una prueba un momento de estrés que genera ansiedad. En ese contexto, este estudio buscó ofrecer dos instrumentos de medida de la ansiedad en situación de prueba y demostrar las evidencias de validez de esas escalas para uso en Brasil. Participaron 1.878 estudiantes de enseñanza media de escuelas públicas y particulares de Brasilia. Dos instrumentos de ansiedad fueron desarrollados: uno que busca medir cuatro dimensiones de ansiedad, el Inventario de Ansiedad frente a Pruebas (IAP), y el Inventario de Ansiedad Interna y Externamente Causada (IAIEC). Se verificó que los instrumentos tienen estructuras factoriales adecuadas y buena consistencia interna. Además, los análisis de correlación con otros instrumentos de ansiedad indicaron evidencias de validez convergente adecuadas con correlaciones entre 0,31 y 0,72. Las implicaciones de esta investigación son importantes para el ámbito clínico, social y académico...

Fatores que afetam o desempenho na prova de matemática do SEAB: um estudo multinível / Factors that affect the performance on the SAEB mathematics test: a multilevel study

No presente estudo objetivou-se identificar quais características de alunos e escolas são associadas ao desempenho em Matemática. Foram analisados os dados de 35.929 alunos da 3ª série do Ensino Médio, distribuídos em 1.661 escolas brasileiras que fizeram o teste de Matemática do SAEB em 2001. Análise multinível mostrou uma correlação intraclasse (ICC) bruta de 0,43 e uma ICC corrigida pelas variáveis relacionadas com a composição e seletividade da escola de 0,15. Depois da entrada das variáveis de controle, sete indicadores no nível do aluno e cinco indicadores no nível da escola foram identificados como tendo efeito na proficiência em Matemática. No modelo final pelo menos 84,9 por cento da variância total no nível da escola e 19,8 por cento da variância total no nível do aluno foram explicadas. Os resultados do presente estudo corroboram outros estudos brasileiros com o uso de análise multinível sobre os fatores que afetam o desempenho em Matemática.

The main purpose of this study was to identify variables that affect proficiency in Mathematics of Brazilian students of the third grade of secondary school. To attain this goal we analyzed the data of 35,929 students of 1,715 schools who took the Mathematics test of the SAEB in 2001. Multilevel analysis showed a raw intraclass correlation (ICC) of .43 and an ICC corrected for variables related to the composition and selectivity of the school of .15. After the entry of the control variables seven indicators on student level and five indicators on school level were identified that affect achievement in Mathematics. The final model of this study explains at least 84.9 percent of the total variance on school level and 19.8 percent of the total variance on student level. The results of the present study confirm the results of other Brazilian studies related to factors affecting proficiency in Mathematics using multilevel analysis.

Indicações da validade convergente do teste Não-Verbal de Inteligência Son-R 2½-7[A] / Indications of the convergent validaty of the Non-verbal Tes of Intelligence Son-R 2½-7[A]

O objetivo deste estudo foi avaliar a validade convergente do teste não-verbal de inteligência SON-R 2½-7[a] no Brasil. O teste em questão é a versão abreviada do SON-R 2½-7 que foi publicado na Holanda em 1998 e que foi normatizado e validado em vários países de Europa. A versão abreviada foi administrada no Brasil em 120 crianças com idade variando entre 5 e 7 anos junto com as Matrizes Progressivas Coloridas (MPC) do Raven e com a Escala de Maturidade Mental Colúmbia (EMMC). A correlação, corrigida para atenuação, do SON-R 2½-7[a] com estes dois testes foi respectivamente, 0,77, e 0,62. Foi observada uma relação particularmente forte entre o MPC e a escala de execução do SON-R 2½-7[a], e entre o EMMC e a escala de raciocínio do SON-R 2½-7[a]. Os resultados do presente estudo indicam uma boa validade convergente do teste para a faixa de idade investigada.

This study aimed to investigate the convergent validity of the nonverbal test of intelligence SON-R 2½-7[a] in Brazil. This test is the abridged edition of the SON-R 2½-7 nonverbal test of intelligence that was published in 1998 in The Netherlands with normatization and validation studies realized in various European countries. The abridged edition was administered in Brazil to 120 children with ages varying between 5 and 7 years together with Raven’s Colored Progressive Matrices (CPM) and the Columbia Mental Maturity Scale (EMMC). The correlation, corrected for attenuation, of the SON-R 2½-7[a] with these two tests was .77 and .62, respectively. A particularly strong relationship was observed between the CPM and the performance scale of the SON-R 2½-7[a], and between the EMMC and the SON-R reasoning scale. The results of this study indicate a fair convergent validity of the SON-R 2½-7[a] for the investigated age group.

Avaliação de programas sociais: comparando estratégias de análise de dados / Social programs evaluation: a comparison of data analysis strategies

Este artigo apresenta uma discussão sobre questões metodológicas em relação à avaliação de programas sociais, tomando como exemplo o caso do Plano Nacional de Qualificação do Trabalhador - PLANFOR. O delineamento da pesquisa foi de um estudo quase-experimental, com três grupos: dois experimentais e um controle. A pesquisa foi realizada durante os anos de 2001 a 2004, com coleta de dados antes e depois do programa, englobando 360 instituições, sendo uma por município, cobrindo todas as regiões brasileiras. Para a coleta de dados, utilizou-se um instrumento com indicadores quantitativos (sociais e econômicos). Foram comparadas quatro estratégias de análise de dados: análise de variância (ANOVA) de mensurações repetidas (pré e pós-teste), ANOVA com escores de ganho, ANOVA com categorização dos sujeitos no pré-teste (blocking) e análise de covariância (ANCOVA). Foram ainda consideradas interpretações alternativas para os efeitos encontrados. Por fim, discutiu-se a adequação de tais estratégias para a avaliação de programas sociais.

This article presents a discussion about methodological questions related to social programs evaluation, taking as an example the case of the National Worker Qualification Plan - PLANFOR. The present study used a quasi-experimental design containing three groups: two experimental groups and one control group. The research was realized from 2001 to 2004, with data collection before and after the program, and comprising 360 organizations, one per city, from all Brazilian regions. For data collection, it was used an instrument with quantitative indicators (social and economic). Four data analysis strategies were compared: analysis of variance (ANOVA) of repeated measurement (pre- and post-test scores), ANOVA with gain scores, ANOVA after subjects' categorization on their pre-test (blocking), and analysis of covariance (ANCOVA). Alternative explanations of the observed effects were considered. Finally, the suitability of these strategies to the evaluation of social programs was discussed.

Fatores associados ao desempenho escolar: estudo multinível com dados do SAEB/2001 / Factors associated with school performance: a multilevel study with data of SAEB/2001

Esse estudo visou construir um modelo de desempenho escolar utilizando análise multinível, um tipo de regressão múltipla que leva em consideração a estrutura hierárquica dos dados. Foram considerados os dados do SAEB de 2001, especificamente os referentes aos alunos da 3ª série do Ensino Médio. Depois de controlar o efeito das variáveis de seletividade e composição escolar verificou-se uma correlação intraclasse de 0,17. Isso significa que 17 por cento da variância no desempenho escolar podem ser atribuídos ao nível da escola. No modelo multinível final foram incluídas sete variáveis referentes ao aluno e nove variáveis referentes à escola. As variáveis com efeito mais forte concernentes ao aluno foram: atraso escolar e comparação do aluno com os colegas. Quanto à escola foram: recursos culturais agregado e atraso escolar agregado. Espera-se que o modelo final seja utilizado para a elaboração de políticas públicas visando o melhoramento do sistema educacional brasileiro.

The purpose of this study was to construct a model of student performance using multilevel analysis, a type of multiple regression that takes into consideration the hierarchical structure of the data. The study used the data of the third grade students of secondary school who participated in the SAEB 2001 assessment. After controlling the effect of the variables of selectivity and school composition, an intraclass correlation of 0.17 was found, indicating that 17 percent of the variance in student performance can be attributed to the school level. In the final multilevel model seven variables of student level and nine variables of school level were included. The variables with the strongest effect on student level were: school delay and comparison of the student with his colleagues. On school level these variables were: aggregated cultural resources and aggregated school delay. The final model elaborated in this study will hopefully be used to elaborate public policies with a view to improve the Brazilian educational system.

Cultural bias in the SON-R test: comparative study of Brazilian and dutch children / Cultural bias in the SON-R test: comparative study of Brazilian and dutch children

No presente estudo, incluindo 83 crianças brasileiras e 51 holandesas, verificou-se a presença de viés cultural nos itens do SON-R 5½-17 que usam objetos e situações concretas. Dois procedimentos foram seguidos para detectar viés do item. No primeiro, perguntou-se às crianças, imediatamente depois de uma resposta errada, se elas reconheceram os desenhos utilizados nos itens. No segundo procedimento, comparou-se a dificuldade dos itens para as crianças brasileiras com a dificuldade dos itens para as crianças holandesas da amostra de normatização do SON-R 5½-17. Identificaram-se quatorze itens com viés, dos quais dez favorecem as crianças holandesas e quatro as crianças brasileiras. A desvantagem cultural para as crianças brasileiras é bastante pequena, levando em consideração o grande número de itens investigado. Este estudo indicou quais itens do SON-R 5½-17 precisam ser melhorados, não só por razões de viés cultural, mas também porque crianças, independentemente do background cultural, encontraram problemas com o reconhecimento de vários desenhos.

Validação cruzada de uma escala de clima organizacional / Cross validation of a scale of organizational climate

A estabilidade da estrutura fatorial de uma escala de clima organizacional com 66 itens foi investigada. A amostra de 61.349 respondentes foi dividida aleatoriamente em duas partes, a primeira para identificação da estrutura fatorial, a segunda para verificação da sua replicabilidade. O critério adotado para identificar o número de fatores resultou na extração de sete fatores. Para obter uma estrutura fatorial satisfatória 23 itens foram eliminados. Uma segunda análise fatorial dos 43 itens restantes indicou sete fatores explicando 63,4 por cento da variância. Uma análise fatorial de segunda ordem revelou um fator geral explicando 55,5 por cento da variância. Para verificar a estabilidade da estrutura fatorial, os mesmos procedimentos e critérios foram empregados na segunda amostra. Os resultados indicam uma grande estabilidade da estrutura fatorial hierárquica da escala de clima organizacional, com sete fatores de primeira ordem e um fator geral de segunda ordem.